¿Qué es lo correcto en esta situación?

Tu respuesta es correcta: en esta situación, debes esperar delante del cruce.

Aunque hay una señal de vía prioritaria, el agente de tráfico tiene siempre la máxima autoridad y prevalece sobre señales y semáforos. Como el agente está de pie con el brazo levantado hacia ti, esto significa que tienes que detenerte y esperar, igual que ante una señal de “stop”. No debes girar a la derecha ni dar la vuelta hasta que el agente lo permita.

Recuerda: ante un agente regulando el tráfico, sigue siempre sus indicaciones, aunque contradigan las señales o semáforos.